“nifi”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果61个，建议您升级VIP下载更多相关专利

[发明专利]一种基于NiFi的大数据量非结构文件采集方法及系统-CN201910899907.9有效
发明人：翟建峰;胡清;王建华 -专利权人：浪潮软件股份有限公司
申请日： 2019-09-23 - 公布日： 2023-04-28 - 主分类号： G06F16/11 文献下载
摘要：本发明公开了一种基于NiFi的大数据量非结构文件采集方法及系统，属于计算机技术领域。本发明的基于NiFi的大数据量非结构文件采集方法在数据中心部署大数据平台和NiFi集群，在数据采集和数据传输节点部署NiFi单例或NiFi集群，由NiFi负责数据采集、数据传输及数据存储。该发明的基于NiFi的大数据量非结构文件采集方法技术简单、难点低、开发工作少，易于实施与应用，并且性能快速稳定，具有很好的推广应用价值。
一种基于 nifi 数据量结构文件采集方法系统

[发明专利]一种气象数据的处理方法、装置、终端及存储介质-CN202111046860.5有效
发明人：刘学奇;闫庚翔 -专利权人：北京普睿德利科技有限公司
申请日： 2021-09-06 - 公布日： 2023-07-18 - 主分类号： G06F16/13 文献下载
摘要：本发明实施例公开了一种气象数据的处理方法、装置、终端及存储介质，该方法包括：通过第一nifi节点获取气象源文件，基于气象源文件生成ctl文件，并将ctl文件存储在flowfile中；通过第二nifi节点从flowfile中读取ctl文件，并为读取的ctl文件设置参数；通过第三nifi节点将设置有参数的ctl文件以flowfile的方式分发到多个第四nifi节点；通过多个第四nifi节点接收flowfile通过多个nifi节点对气象数据的进行并行处理，各个nifi节点之间通过flowfile数据流实现联动，方便拓展，以此加快了处理速度，避免了拥堵。
一种气象数据处理方法装置终端存储介质

[发明专利]一种数据处理方法、装置、设备及介质-CN201910866478.5有效
发明人：刘松伟 -专利权人：济南浪潮数据技术有限公司
申请日： 2019-09-12 - 公布日： 2022-08-02 - 主分类号： G06F9/445 文献下载
摘要：本申请公开了一种数据处理方法、装置、设备及介质，包括：获取用户对flumeagent进行配置后得到的配置文件；对所述配置文件进行解析，得到配置信息，然后利用所述配置信息以及第一source和第一sink与nifi与所述第一sink对应的第二processor以及所述第一processor和所述第二processor之间的数据处理顺序；利用所述第一processor、所述第二processor以及所述数据处理顺序生成nifi模板；将所述nifi模板提交到nifi集群中进行数据处理。这样，利用flumeagent的配置文件生成nifi模板，并将得到的所述nifi模板提交到nifi集群中进行数据处理，能够让用户只需要配置flume，便可以利用nifi进行数据处理，从而降低了用户进行数据处理时的学习成本
一种数据处理方法装置设备介质

[发明专利]一种NiFi同步数据量统计方法-CN202110001764.2有效
发明人：翟建峰;胡清;李国涛 -专利权人：浪潮云信息技术股份公司
申请日： 2021-01-04 - 公布日： 2023-03-28 - 主分类号： G06F16/178 文献下载
摘要：本发明特别涉及一种NiFi同步数据量统计方法。该NiFi同步数据量统计方法，基于NiFi数据文件批次标识，数据文件编码以及数据文件数据量标识属性实现对同步数量的统计。该NiFi同步数据量统计方法，不仅能够在使用NiFi进行大数据量数据同步操作时对同步数据量进行统计，而且易于实现，开发成本低，灵活多样，具有很高的可扩展性，具有广泛的适用场景，适于推广应用。
一种 nifi 同步数据量统计方法

[发明专利]一种ApacheNiFi在源数据录入数据库方面的扩展应用方法和系统-CN201710486181.7在审
发明人：赵志星 -专利权人：北京北信源软件股份有限公司
申请日： 2017-06-23 - 公布日： 2017-11-07 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种Apache NiFi在源数据录入数据库方面的扩展应用方法，该方法包括以下步骤将所述源数据保存成数据文件；使用所述Apache NiFi从所述数据文件中读取数据；将读入所述Apache NiFi的所述数据进行解压；使用所述Apache NiFi格式化所述数据；扩展所述Apache NiFi的入库组件；以及通过扩展的所述入库组件将格式化数据导入所述数据库。
一种 apachenifi 数据录入数据库方面扩展应用方法系统

[发明专利]一种基于DRBD的NiFi高可用部署方法及系统-CN202211423470.X在审
发明人：孙亮亮;张栋;李国涛;胡清 -专利权人：浪潮云信息技术股份公司
申请日： 2022-11-15 - 公布日： 2023-03-31 - 主分类号： H04L67/10 文献下载
摘要：本发明涉及高可用部署技术领域，具体为一种基于DRBD的NiFi高可用部署方法包括以下步骤：部署由三个计算实例组成的Pacemaker代管式集群，在主实例和备用实例上分别安装NiFi和DRBD，在第三个实例中安装仲裁设备；安装配置DRBD及NiFi；配置Pacemaker纳管集群服务；有益效果为：本发明提出的基于DRBD的NiFi高可用部署方法及系统提高了NiFi配置数据的安全可靠性，保障数据不会丢失，保障NiFi任务的持续运行及业务可靠性
一种基于 drbd nifi 可用部署方法系统

[发明专利]用于采集数据的方法、存储介质、处理器及工程车辆-CN202210827904.6在审
发明人：路培杰;刘文虎;张超;王鑫鹏;金飞亮;谭新亮 -专利权人：中科云谷科技有限公司
申请日： 2022-07-14 - 公布日： 2022-10-25 - 主分类号： G06F8/34 文献下载
摘要：本申请实施例提供一种用于采集数据的方法、存储介质、处理器及工程车辆，方法应用于安装有nifi应用程序的第一终端，方法包括：获取用户通过nifi应用程序的操作界面触发的针对第一图标的第一操作指令，第一图标是预设的nifi组件在nifi应用程序中的显示图标；根据第一操作指令获取用户输入的针对每个预设的nifi组件的配置参数；根据每个预设的nifi组件的配置参数生成与目标设备对应的第一模板文件；将第一模板文件发送至与目标设备所对应的第二终端
用于采集数据方法存储介质处理器工程车辆

[发明专利]基于NiFi的数据处理方法和装置-CN202010047169.8在审
发明人：胡振升;胡清;王建华 -专利权人：浪潮软件股份有限公司
申请日： 2020-01-16 - 公布日： 2020-06-09 - 主分类号： G06F16/215 文献下载
摘要：本发明提供了基于NiFi的数据处理方法和装置，包括：预先部署NiFi组件，并设置用于数据清洗的清洗组件和用于数据转换的转换组件，还包括：将清洗组件和转换组件嵌入在NiFi组件中；利用嵌入后的NiFi组件执行
基于 nifi 数据处理方法装置

[发明专利]一种实现EXCEL文件形式的医疗数据脱敏方法及系统-CN202211092629.4在审
发明人：邵乐鹏 -专利权人：山东浪潮智慧医疗科技有限公司;山东健康医疗大数据有限公司
申请日： 2022-09-08 - 公布日： 2023-06-06 - 主分类号： G06F21/62 文献下载
摘要：本发明涉及数据脱敏领域，具体提供了一种实现EXCEL文件形式的医疗数据脱敏方法，基于NIFI，进行window与linux系统环境安装，安装成功后，通过浏览器进行访问并操作，NIFI数据流由处理器和关系构成有向无环图，处理器是nifi的数据处理单元，关系是处理器之间数据分发单元；NIFI处理器的编排组合、脱敏的规则算法根据健康医疗领域数据常见的场景进行开发，定制化集成到NIFI中。
一种实现 excel 文件形式医疗数据方法系统

[发明专利]一种基于KAFKA与NIFI的离线+实时发货单费用计提方法及系统-CN202211016227.6在审
发明人：高鹏超;张立勇;孙向晖;毛胜磊;姜亚楠 -专利权人：浪潮云信息技术股份公司
申请日： 2022-08-24 - 公布日： 2022-12-06 - 主分类号： G06Q30/06 文献下载
摘要：本发明涉及大数据技术领域，具体为一种基于KAFKA与NIFI的离线+实时发货单费用计提方法，包括以下步骤：实时、离线的获取发货单数据；通过开发自定义校验组件以及NIFI的脚本组件ExecuteScript实现数据质量检测；根据配置生成计提HTTP接口；通过NIFI的InvokeHTTP组件调用计提接口实现发货单费用计提；通过NIFI的定时调度功能以及SQL查询组件ExecuteSQL等组件，定时从计提错误库获取发货单进行补偿计提操作；有益效果为：本发明提出的基于KAFKA与NIFI的离线+实时发货单费用计提方法及系统具有高性能、高扩展性、高可靠的优点，同时支持实时、离线运行。
一种基于 kafka nifi 离线实时货单用计方法系统

[发明专利]一种基于分布式架构的空间数据转换方法-CN202011078340.8在审
发明人：曲建龙;宋海涛;周明;魏存挡;王善美 -专利权人：浪潮云信息技术股份公司
申请日： 2020-10-10 - 公布日： 2021-01-08 - 主分类号： G06F16/25 文献下载
摘要：本发明公开一种基于分布式架构的空间数据转换方法，涉及数据处理技术领域，其实现包括：首先，基于开源的nifi和kafka技术，采用B/S架构，将空间数据进行分布式集群部署；随后，通过浏览器访问部署有空间数据的服务器，并执行如下操作：在任务管理页面，基于空间数据创建任务，在任务列表，选取需要调度的任务，在任务调度页面，启动选取的任务，调用nifi数据流模板，创建nifi任务，并把空间数据传递给nifi处理器；最后，nifi处理器创建数据库连接、拆分数据处理任务、kafka处理器分发任务，nifi处理器还并发执行数据处理任务、质量评估，实现空间数据的快速转换。
一种基于分布式架构空间数据转换方法

[发明专利]NiFi高可用集群模式的实现方法及系统-CN202210299935.9在审
发明人：翟建峰;胡清 -专利权人：浪潮云信息技术股份公司
申请日： 2022-03-25 - 公布日： 2022-07-01 - 主分类号： H04L67/10 文献下载
摘要：本发明公开了NiFi高可用集群模式的实现方法及系统，属于集群技术领域，本发明要解决的技术问题为如何提高NiFi集群异常恢复的自动化程度，进而提高NiFi的高可用性，采用的技术方案为：该方法是在NiFi原有的集群模式中添加Master节点和Worker节点构建优化后的NiFi集群模式，并将集群状态存储在外部Redis集群中，保证任务状态数据各个节点均能够根据任务标识进行访问，进而保证异常恢复的任务能够正常获取已经持久化的状态数据
nifi 可用集群模式实现方法系统

[发明专利]一种基于NiFi编排的威胁情报生成方法及系统-CN202211456167.X在审
发明人：张梦玉;肖国颖 -专利权人：北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司
申请日： 2022-11-21 - 公布日： 2023-05-12 - 主分类号： G06F21/55 文献下载
摘要：本申请实施例提供一种基于NiFi编排的威胁情报生成方法及系统，涉及云安全技术领域。该基于NiFi编排的威胁情报生成方法包括：获取插件标准输入输出规范信息、插件编写应用规范信息和NiFi使用命名规范信息；基于预设NiFi系统、所述插件标准输入输出规范信息和所述插件编写应用规范信息生成多个自定义处理器；根据所述多个自定义处理器编排并生成威胁情报生产流程；基于所述NiFi使用命名规范信息将所述威胁情报生产流程同步至预设系统界面；启动所述威胁情报生产流程，通过所述威胁情报生产流程生成待监控对象的威胁情报信息
一种基于 nifi 编排威胁情报生成方法系统

[发明专利]一种用于NIFI任务的分布式监控系统及方法-CN201910874660.5有效
发明人：陈绪申;程林;杨培强 -专利权人：浪潮软件科技有限公司
申请日： 2019-09-17 - 公布日： 2023-05-12 - 主分类号： G06F11/30 文献下载
摘要：本发明公开了一种用于NIFI任务的分布式监控系统及方法，属于任务监控领域，要解决的技术问题为如何对NIFI从任务和步骤两个方面进行日志统计及监控。方法包括：构建一种用于NIFI任务的分布式监控系统，并基于NIFI任务链配置日志处理器；通过日志处理器从任务和步骤两个方面对NIFI任务进行日志统计；通过监控界面展示分别展示所述任务日志表和步骤日志表以监控任务和步骤
一种用于 nifi 任务分布式监控系统方法

[发明专利]一种基于NiFi组件的表多个字段校验的数据清洗方法-CN202210421071.3在审
发明人：王楠楠;王庆明;周庆勇;胡清 -专利权人：浪潮云信息技术股份公司
申请日： 2022-04-21 - 公布日： 2022-09-02 - 主分类号： G06F16/215 文献下载
摘要：本发明公开了一种基于NiFi组件的表多个字段校验的数据清洗方法，属于大数据技术领域。本发明的基于NiFi组件的表多个字段校验的数据清洗方法依托开源的数据处理与分发平台ApacheNiFi，开发新的NiFi标准验证处理器，标准验证处理器是属性配置包括校验字段来源表、错误信息记录字段、记录是否有错误的标志字段该发明的基于NiFi组件的表多个字段校验的数据清洗方法能够降低不同数据源和不同业务需求带来的复杂性，提升开发人员和运维人员的效率，提高数据质量，从而快速达到数据清洗目的，具有很好的推广应用价值。
一种基于 nifi 组件表多个字段校验数据清洗方法

1
2
3
4
5
下一页»
尾页
共 61 条